word token
- 网络词次;词用;单词

word token
词次
注释: ①词次(word token),指文本的长度,因包括了同一个单词的复现数,因此数据一般大于 词形。 ②词形(word type),指文本中 …
词用
常用本地化术语(三) ... 词形 word type 词用 word token 对称关系 symmetric relation ...
单词
...d or token):是有意义的最小的程序单位 单词(word token): ? 例1: x+12 单词有3个:x, +, 12 单词有3 ? 例2:x12 + y 单词 …